home *** CD-ROM | disk | FTP | other *** search
/ Games of Daze / Infomagic - Games of Daze (Summer 1995) (Disc 1 of 2).iso / x2ftp / books / tech / performa.rvw < prev    next >
Encoding:
Text File  |  1995-03-31  |  5.0 KB  |  100 lines
  1. "Performance-Based Assessments: External, Internal, and Self-Assessment Tools
  2. for Total Quality Management" by Paul F. Wilson and Richard D. Pearson,
  3. published by ASQC Quality Press (611 East Wisconsin Avenue, Milwaukee,
  4. Wisconsin 53202), 1995, 202 pages, $33 list, $30 ASQC members
  5.  
  6. A Book Review by Norman C. Frank, PE, CQE, CQA
  7. CER Corporation, Washington, DC
  8.  
  9. "Performance-Based Assessments" provides a process for assessing processes
  10. that goes beyond looking for compliance and beyond looking for effectiveness. 
  11. Although "performance-based" has become one of the latest buzzwords in the
  12. field of assessments (includes assessment, audit, appraisal, and
  13. surveillance), the fundamental concept is good and has much to offer to
  14. improve the processes of your company.  Considerable effort is made to define
  15. compliance and effectiveness assessments, yet there is no obvious definition
  16. of performance-based assessments.
  17.  
  18. The basic premise is that performance-based assessments should not be
  19. conducted unless at least one hoped-for positive outcome is identified.  The
  20. ultimate success of the effort will be judged by a simple criterion: Did we
  21. find some way to do things better?
  22.  
  23. Performance-based assessments can be classified broadly as process, product,
  24. or system and are concerned with those attributes of products or services
  25. reflecting customer needs and expectations.
  26.  
  27. The performance-based approach to assessments:
  28.  
  29.          requires direct observation of activities
  30.          focuses on processes or activities most directly impacting
  31.           operations, safety, reliability, or maintainability
  32.          includes an evaluation of not only whether, but to what extent,
  33.           product or service goals are being achieved
  34.          requires technical expertise or knowledge of operations to evaluate
  35.           the selected component/system, activity, or program
  36.          adds the step in which the significance of any recommendation or
  37.           finding is analyzed and documented
  38.          adds the process whereby the underlying or apparent cause(s) of
  39.           less-than-adequate performance is analyzed
  40.  
  41. Unfortunately, sometimes it is not possible to directly observe the process
  42. or activity.  Then the assessor must resort to review of past data.  "Lines
  43. of inquiry" replace the more common checklists to allow for a broader look at
  44. a process or activity.
  45.  
  46. There were several weaknesses in the book:
  47.  
  48.     The book tries to cover too much in the space allowed.  As a consequence
  49.      it gives little help in how to perform the assessment, although it does
  50.      give some help in how to organize the results of the assessment.  There
  51.      are few examples to clarify the concept or approach.
  52.  
  53.     Missing from the book is a clear description of who does what part of
  54.      the process.  Even a section on the options available would add to the
  55.      book.
  56.  
  57.     The book assumes that you have a broad base knowledge to draw from
  58.      (e.g., the book mentions a Type II error in management decisions and
  59.      does not elaborate).
  60.  
  61.     There is no clear training to be given to assessors performing
  62.      performance-based assessments, yet the authors state "performance-based
  63.      training is a highly effective means of ensuring that personnel receive
  64.      proper training to conduct their work safely and efficiently."  There is
  65.      a fair amount on "performance-based training", but nothing on the
  66.      content of training for performance-based assessors.  The only item I
  67.      looked up in the index, "trained auditors and surveillors, 52", did not
  68.      have anything on page 52 about trained auditors and surveillors.
  69.  
  70.     This book presents a process that is different from the process used by
  71.      other parts of the DOE to perform performance-based assessments.
  72.  
  73.     There is considerable discussion on creating the best organization and
  74.      culture.  Again there is not enough information to allow you to take
  75.      action, plus there is only one supporting reference for the chapter on
  76.      "management".
  77.  
  78.     A process of "pulse point auditing" as a tool for cutting the time of
  79.      performance is suspiciously similar to "key point auditing" that has
  80.      been around for years.
  81.  
  82.     For some reason, the authors coin the word "surveillors" without apology
  83.      yet apologize for using the word "doability".
  84.  
  85. The authors' concept of performance-based assessments includes getting to the
  86. causes; solving problems; generating alternatives; evaluating risk or
  87. importance; considering cost and schedule; making change happen; and
  88. implementing the recommendations.
  89.  
  90. This book gives you one group's concept of what a performance-based
  91. assessment consists of.  This book is good for an overview of the
  92. performance-based assessment concept.  Recommended for someone not familiar
  93. with performance-based assessments who would like to get a feel of what it
  94. entails.
  95. ----------------
  96. Mr. Frank has over 25 years experience in the field of quality, in the areas
  97. of nuclear quality assurance, research and development, and consulting.  He
  98. is currently in Washington, D.C., with CER Corporation out of Las Vegas,
  99. Nevada.
  100.